Đầu thời Tấn Mục Đế, các trọng thần Dữu Băng, Dữu Dực rồi Hà Sung lần lượt qua đời[4]. Tuy nhiên lúc này lại nổi lên thế lực của tướng quân Hoàn Ôn. Sau khi tiêu diệt được nước Thành Hán vào năm 348, uy tín của Hoàn Ôn trong triều ngày càng lớn mạnh, đe dọa đến triều đình trong khi Mục Đế còn quá nhỏ tuổi. Cối Kê vương Tư Mã Dục, người quản lý triều đình lo sợ, bèn nghe theo đề nghị của Trữ Bầu, mời Ân Hạo vào triều. Ân Hạo từ chối suốt từ tháng 3 đến tháng 7, cuối cùng chấp nhận[5].